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10 Fahrerassistenzverfahren und -vorrichtung auf der Basis von Fahrspurinformationen 

Stand der Technik 

Die Erfindung betriffi ein Fahrerassistenzverfahren und eine Fahrerassistenzvorrichtung, 
1 5 welche auf der Basis von Fahrspurinformationen arbeitet 

Fahrerassistenzsysteme, welche auf der Basis von Fahrspurinformationen arbeiten, sind 
im Stand der Technik bekannt. Ein Beispiel fur ein solches Fahrassistenzsystem ist ein 
Warnsystem, welches den Fahrer bei Verlassen der Fahrspur bzw. bei drohendem 
2 0 Verlassen der Fahrspur warnt Ein derartiges System zeigt beispielsweise die EP 1074430 

Al, bei welcher mit Bildsensorsystemen die Fahrbahn (Fahrspur), auf der sich das 
Fahrzeug bewegt, ermittelt wird und der Fahrer gewarnt wird, wenn das Fahrzeug diese 
Fahrspur verlasst bzw. zu verlassen droht. Ferner sind aus den nicht vorveroffentli chten 
deutschen Patentanmeldungen 1 03 11 518.8 mit der Prioritat vom 30.04.2002 sowie der 

2 5 102 38 215.8 mit Prioritat vom 1 1.06.2002 derartige Fahrerassistenzsysteme bekannt. Zur 

Erfassung der Fahrspur werden in diesen Fallen Bildsensorsysteme verwendet, welche im 
Fahrzeug eingebaut sind und welche die Szene vor dem Fahrzeug aufiiehmen. Aus den 
aufgenommenen Bildern der Fahrspurrandmarkierungen werden die Grenzen der 
Fahrspur und damit die Fahrspur selbst ermittelt Die Ermittlung der Fahrspur hangt 

3 0 demnach wesentlich von den herrschenden Sichtverhaltnissen ab, wobei bei schlechten 

Sichtverhaltnissen die bekannten Systeme fruhzeitig abzuschalten sind. 



Aus der DE 19627 938 Al ist ein Beispiel fur die Erkennung und Modellierung von 
Fahrbandrandrnarki erungen aus Videobildern bekannt, wobei als Modellparameter unter 
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anderem Fahrbahnbreite, Fahrbahnkriirnmung, Krummungsanderung und seitlicher 
Versatz des Fahrzeugs ermittelt wfcraen 



Vorteile der Erfindung 

5 

Durch die Verwendung weiterer Informationen neben oder alternativ zur den 
Fahrspurrandmariderungen, aus denen die den Verlauf der Fahrbahn (Fahrspur) 
beschieibenden Groflen abgeleitet werden, wird die Verfugbarkeit eines auf 
Fahrspurinformationen basierenden Fahrerassistenzsystems deutlich erhoht. Besonders 
1 0 vorteilhaft ist, dass das Fahrerassistenzsystem auch dann verfugbar ist, wenn die 

Fahrspurrandmariderungen nicht mehr zuverlassig erkennbar sind. Dies ist vor allem bei 
schlechten Witterungsbedingungen wie beispielsweise nasser Fahrbahn, bei 
schneebedeckter Fahrbahn, etc. oder bei schlecht sichtbaren bzw. nicht vorhandenen 
Fahrspurrandmariderungen von Bedeutung. 



15 

Besonders vorteilhaft ist, den neben den Fahrspurrandmariderungen oder auch anstelle 
dieser andere Informationen jeweils einzeln oder in beliebiger Kombination zur 
Fahrspurbestimmung herangezogen werden, wie beispielsweise die Trajektorie eines oder 
mehrerer vorausfahrender Fahrzeug, die Fahrspuren eines oder mehrerer vorausfahrender 
2 0 Fahrzeuge beispielsweise bei Regen oder Schnee, die Trajektorie eines oder mehrerer 

entgegenkommender Fahrzeuge, der Verlauf von Fahrbahnrandbegrenzungen wie 
beispielsweise Leitplanken, Bordsteine, etc. Aus diesen Daten lassen sich ebenfalls 
Fahrspurinformationen ableiten (schatzen), die anstelle oder zusammen mit der aus den 
Fahrspurrandmariderungen ermittelten Fahrspurinformation die Spurinformation 

2 5 (Spurdaten) fur das Fahreras sistenzsy stem bilden. Dadurch wird die Fahrspurermittlung 

sicherer, insbesondere dann, wenn die eigentUchen Fahrspurrandmariderungen nicht mehr 
ausreichend erkennbar sind. 

Besonders vorteilhaft ist, dass dies ohne zusatzliche Hardware allein auf der Basis der 

3 0 Signale des Bildsensorsystems erfolgt. 

Besonders vorteilhaft ist, dass GutemaOe fur die Spurdatenerfassung beispielsweise aus 
dem Bildkontrast ermittelt werden, nrit denen die jeweils ermittelten Spurdaten gewichtet 
und bei der Fusion der dem Fahrerassi stenzsystem zur Verfugung gestellten Spurdaten 
3 5 aus den einzelnen Spurdaten berucksichtigt werden. Besonders vorteilhaft in diesem 
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Zusammenhang ist, dass die Bildung eines GesamtgutemaBes fur die Spurdatenerfassung 
aus den EinzelgutemaBen vorgesehen ist, wobei das Fahrerassistenzsystem abgeschaltet 
wild, wenn dieses Gesamtgutemafi einen bestimmten Wert unterschreitet. Vorteilhaft ist 
auch, wenn das GiitemaB aus einem Vergleich der Schatzung mit der Messung abgeleitet 
5 wird, wobei insbesondere die Abweichung der Messpunkte von der Schatzlinie (Varianz) 

herangezogen werden. 

Vorteilhaft ist feraer, dass durch die Erhdhung der Verfugbarkeit des 
Fahrerassistenzsystems insbesondere auch bei schlechten Witterungsbedingungen die 
1 0 Fahrerunterstutzung gerade dann funktioniert, wenn der Fahrer diese Unterstutzung 

besonders braucht Insbesondere bei schlechten Wetterbedingungen wird der Fahrer 
durch ein Funktionieren des Fahrerassistenzsystems erheblich entlastet. 

In besonders vorteilhafter Weise werden bei der Spurdatenermittlung aus anderen 
1 5 Informalionen als der Fahrspurrandrnarkierungen (was im folgenden auch als 

Spurdatenschatzung bezeichnet wird) Daten eines global en Positioniersystems und/oder 
Daten einer Navigationskarte und/oder neben der Fahrbahn stehende nicht bewegte 
Objekte, die vom Video-Sensor klassifiziert werden, zur Plausibilisierung der Spurdaten 
ausgewertet Dadurch wird die Spurdatenermittlung (Spurdatenschatzung) zuverlassiger. 
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Besonders vorteilhaft ist auch, dass man bei Verlust von Werten, beispielsweise des 
Wertes fur die Fahrbahnbreite, Werte vor dem Verlust oder Erfahrungswerte bzw. 
Durchschnittswerte bei der Spurdatenschatzung fur diese Grofle einsetzt Damit ist die 
Funktion der Spurdatenschatzung auch unter diesen Umstanden gewahrleitstet. 

* 

Weitere Vorteile ergeben sich aus der nachfolgenden Beschreibung von 
Ausfuhrungsbeispielen bzw. aus den abhangigen Patentanspruchen. 

Zeichnung 



Die Erfindung wird nachstehend anhand der in der Zeichnung dargestellten 
Ausfuhrungsformen naher erlautert 

Figur 1 zeigt dabei ein Blockschaltbild eines Fahrerassi stenzsyste ms, insbesondere zur 
Fahrerwarnung bzw, zur Reaktion bei drohendem Verlassen der Fahrspur durch das 
35 Fahrzeug. 
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Figur 2 zeigt ein grobes Ablaufdiagramm eines ersten Ausfiihrungsbeispiels zur 
Bereitstellung der Spurdateninformation. 

In den Figuren 3 bis 5 sind Flussdiagramme skizziert, welche eine zweite 
Ausfuhrungsform fur die Messung, Schatzung von Spurdaten und deren Auswertung im 
5 Fahrerassistenzsystem reprasentieren. 

Beschxeibung von Ausfuhrungsbeispielen 

Figur 1 zeigt eine Vorrichtung, welche zur Warnung des Fahrers bzw. zur Reaktion bei 
1 0 Verlassen der Fahrspur durch das Fahrzeug dient Gezeigt ist eine Steuer- bzw. 

Auswerteeinheit 10, welche eine Eingangsschaltung 12, einen Mikrocomputer 14 sowie 
eine Ausgangsschaltung 16 aufweist. Diese Elemente sind mit einem Bussystem zum 
gegenseitigen Datenaustausch miteinander verbunden. Der Eingangsschaltung 12 werden 
Eingangsleitungen von verschiedenen Messeinrichtungen zugefuhrt, uber die Messsignale 
1 5 bzw. Messinformationen ubermittelt werden. Eine erste Eingangsleitung 20 verbindet die 

Eingangsschaltung 12 mit einem Bildsensorsystem 22, welches im Fahrzeug angeordnet 
ist und welches die Szene vor dem Fahrzeug aufnimmt Entsprechende Bilddaten werden 
uber die Eingangsleitung 20 iibermittelt Ferner sind Eingangsleitungen 24 bis 26 
vorgesehen, welche die Eingangsschaltung 12 mit Messeinrichtungen 30 bis 34 
2 0 verbinden. Bei diesen Messeinrichtungen handelt es sich beispielsweise urn 

Messeinrichtungen zur Messung der Fahrzeuggeschwindigkeit, zur Erfassung des 
Lenkwinkels sowie zur Erfassung weiterer Betriebsgrdfien des Fahrzeugs, welche im 
Zusammenhang mit der Funktion des Fahrerassistenz systems Bedeutung haben. Femer 
werden uber diese Eingangsleitungen Kartendaten und/oder Positionsdaten des Fahrzeugs 

2 5 zugefuhrt. Uber die Ausgangsschaltung 16 und die Ausgangsleitung 36 wird wenigstens 

eine Warneinrichtung 38 angesteuert, beispielsweise eine Warnlampe und/oder ein 
Lautsprecher fur eine akustische Warnung und/oder fur eine Sprachausgabe und/oder ein 
Display fur die Anzeige eines Bildes, mit deren Hilfe der Fahrer vor dem drohenden 
Verlassen der Fahrspuren informiert bzw. gewarnt wild. Auch eine haptische Warnung 

3 0 (z.B. Lenkradvibrati on) kann vorgesehen sein. hi einem andenen Ausfuhrungsbeispiel ist 

altemativ oder zusatzlich vorgesehen, uber die Ausgangsschaltung 16 und eine 
Ausgangsleitung 40 ein Stell system 42 anzusteuern, welches automatisch beispielsweise 
durch Eingriff in die Lenkung des Fahrzeugs das Fahrzeug wieder in die Spur zuruckfuhrt 
und so das Verlassen der Fahrspur verhindert. 
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Spurdaten werden in einer Ausfuhrung entsprechend der im eingangs genannten Stand 
der Technik ermittelt, wobei Fahrbahnmodellparameter durch Analyse des erfassten 
Bildes nach MaBgabe einer die Kameradaten umfassenden Abbildungsvorschrift ermittelt 
werden und an das gemessene Bild angepasst werden. So analysiert das 
Fahrerassistenzsystem das vom Bildsensor erfasste Bild und ermittelt Objekte im Bild, 
insbesondere die Fahrspurrandmarkierungen (zJB. Mittellinien, etc.). Die Verlaufe der 
ermitteiten Fahrspiirrandmarkierungen (links und rechts) werden dann mathematisch 
durch Funktionen angenahert, zJB. als Klothoidenmodell, beispielsweise angenahert 
durch ein Polynom zweiter Ordnung. Parameter dieser Gleichungen sind z.B. Krummung 
und Kriirnmungsanderung, der Abstand des Eigenfahrzeugs zur Randmarkierungen nach 
links und nach rechts. Ferner kann der Winkel zwischen der Tangente der berechneten 
Spur und der Bewegungsrichtung des eigenen Fahrzeugs ermittelt werden. Die auf diese 
Weise ermittelte Fahrspurinfoimation wird dann dem Assistenzsystem zugefuhrt, welches 
anhand der Eigentrajektorie(n) des Fahrzeugs (ermittelt z.B. auf der Basis des 
Lenkwinkels) ein drohendes tFberschreiten der Fahrspur erkennt und zum geeigneten 
Zeitpunkt den Fahrer warnt bzw. GegenmaBnahmen einleitet 
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Solange die Fahrspiirrandmarkierungen im aufgenommenen Bild deutlich zu erkennen 
sind, ist die Berechnung dieser Spurdaten wie oben geschildert genau und zuverlassig. 
Bei schlechten Witterungsbedingungen und/oder schlechter Sicht und/oder schlecht 
sichtbaren bzw. nicht vorhandenen Spurrandmarkierungen kann die beschriebene 
Vorgehensweise ungenau sein bzw. kein Ergebnis liefern konnen. Die auf Basis der 
Spurdaten arbeitenden Systeme war en somit in solchen Situationen abzuschalten. 
Nachfolgend wird daher eine Erweiterung der Spurdaten erf as sun g und damit eine 
Erweiterung des damit verbundenen Fahrerassistenzsystems beschrieben, welche auch bei 
schlechten Witterungsbedingungen und/oder schlecht sichtbaren bzw. nicht vorhandenen 
Spurrandmaikierungen durch Berechnen einer Fahrspur (Schatzen einer Fahrspur) auf der 
Basis von anderen Informationen aus dem aufgenommen Bild als die 
Spurrandmarkierungen ein weiteres Funktionieren des Fahrerassistenzsystems erlaubt, 
wobei kein zusatzlicher Aufwand an Hardwareausstattung entsteht 



35 



In Figur 2 ist ein Ablaufdiagramm dargestellt, welches ein erstes Ausfuhrungsbeispiel 
bzgj. der oben genannten Erweiterung der Spurdatenerfassung darstellt Das 
Ablaufdiagramm reprasentiert dabei auf dem Mikrocomputer in der Steuer- bzw. 
Auswerteeinheit 10 ablaufende Programme. 
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Ausgangspunkt ist em Bildsensor 200, der im Fahrzeug oder am Fahrzeug angebracht ist 
und die Szene vor dem Fahrzeug aufeimmt Entsprechende Bildsignale werden fiber die 
Leitungen 202 an die Auswerteeinheit 10 weitergeleitet. Neben der oben geschilderten 
5 Spurdateriberechnung auf der Basis von Spurrandmarkierungen wertet die 

Auswerteeinheit 10 die ubermittelten Bilder wie folgt aus. 

Zunachst werden wie oben beschrieben im Modul 204 die Fahrspurrandmarkierungen im 
Bild erkannt und dann im Modul 206 die Spurdaten berecbnet In einem zweiten Modul 

1 0 208 werden im dargestellten Ausfuhrungsbeispiel der Verlauf der Spuren eines oder 

mehrerer vorausfahrender Fahrzeug ermittelt, die zB. auf nasser Fahrbahn, im Schnee, 
etc. zu sehen sind Dies wird durch Analyse und Objekterkennung im Bild zJB. auf der 
Basis der Grauwerte erreicht (z.B. Gradientenauswertung). Dabei wird im Rahmen dieser 
Darstellung unter Objekt auch die Fahrbahnrandmarkierung und/oder die 

1 5 Fahrbahnrandbebauung (Leitplanken, etc.) verstanden. Der auf diese Weise erkannte 

Spuren verlauf wird dann analog zum oben Genannten mathematisch mit den genannten 
Parametem beschrieben. Dabei wird die Fahrbahnbreite (geschatzt, aus Kartendaten, etc.) 
mit beriicksichtigt. 

20 Im Modul 210 wird anhand aufeinander folgender Bilder die Trajektorie eines oder 

mehrerer vorausfahrender und/oder von entgegenkommender Fahrzeuge aufgezeichnet 
Dies erfolgt durch Objekterkennung und -verfolgung in den einzelnen Bildem, wobei aus 
den Veranderungen des Objekts die Parameter abgeleitet werden. Die Fahrbahnbreite 
bzw. der Versatz zwischen Gegenverkehr und Verkehr auf der eigenen Spur werden als 

2 5 Schatzwerte beriicksichtigt. Alternativ oder Erganzend werden im Modul 210 stehende 

Objekte am Fahrbahnrand, z.B. Leitplanken, ausgewertet und die Trajektorie auf der 
Basis dieser Information bestimmt 

Ferner wird auf der Basis der vom Bildsensor gelieferten Bilder beispielsweise auf der 

3 0 Basis der Bildkontraste im Bereich des jeweiligen ausgewerteten Objekts ein GutemaB 

(z.B. Zahl zwischen 0 und 1) fur die jeweiligen Spurdaten ermittelt und jeder ermittelten 
Spurdaten mitgegeben. Eine alternative oder erganzende MaOnahme zur Ermittlung des 
GutemaB ist ein Vergleich der Schatzung mit der Messung, wobei insbesondere die 
Abweichung der Messpunkte von der Schatzlinie (Varianz) herangezogen werden. Ist die 
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Varianz groB, wird ein kleines GutemaB angenommen, ist sie klein, wird ein hohes 
GutemaB angegeben. 

Die auf diese Weisen ermittelten zusatzlichen Spurdaten werden im Modul 
5 Spurdatenschatzung 212 dann zur Bildung eines Satzes von geschatzten Spurdaten 

gegebenenfalls unter Berucksichtigung der Gutemafie ausgewertet. Dies erfolgt dabei in 
einer bevoizugten Ausfuhrung durch Gewichtung der auf verschiedene Art und Weisen 
ermittelten Spurdaten mit dem zugeordneten ermittelten GutemaB und der Berechnung 
der resultierenden Spurdaten aus diesen gewichteten Spurdaten der verschiedenen 
1 0 Quellen, z.B. durch Mittelwertbildung. Entsprechend wird ein resultierendes GutemaB 

bestirrimt 

In einer bevorzugten Ausfuhrungsform ist ferner ein globales Positioniersy stem bzw. 
Kartendaten 214 vorgesehen, deren Informationen im Rahmen der Spurdatenschatzung 

15 als Plausibilitatsubeiprufung verwertet wird Beispielsweise wird uberpriift, ob anhand 

dieser Kartendaten bzw. Positionierdaten die ermittelten Spurdaten mit den Kartendaten 
im Rahmen der geforderten Genauigkeit ubereinstimmen oder nicht Im letzteren Fall 
wird abhangig von einem Vergleich der Schatzdaten mit den Kartendaten ein GutemaB 
fiir die Spurdaten festgelegt, wobei das GutemaB bei groBeren Abweichungen geringer ist 

20 als bei kleineren Abweichungen. Konnen beslimmte Spurdaten aus den zu Verfugung 

stehenden Daten nicht ermittelt werden, werden Erfahrungswerte oder Werte vor dem 
Verlust der Information herangezogen. Ist beispielsweise die Breite der Fahrbahn aus den 
aktuell vorliegenden Informationen nicht ermittelbar, so werden entweder 
Erfahrungswerte fur die Fahrbahnbreite oder die bei der letzten Spurdatenschatzung 

2 5 ermittelten Werte fur die Fahrbahnbreite verwendet 

Die auf diese Weise geschatzten Spurdaten werden dann einer Spurdatenfusion 216 
zugefuhrt, in der die geschatzten Spurdaten mit resultierendem GutemaB und die 
berechneten Spurdaten (ebenfalls mit GutemaB) aufgrund der Fahrspurrandmarkierungen 
30 zu den fur die Funktion verwendeten Spurdaten zusammengefuhrt werden. Auch hier 

findet die Datenfusion unter Berucksichtigung der Gutemafie statt, beispielsweise indem 
bei sehr geringem GutemaB die entsprechenden Daten verworfen, bei sehr hohei 
GutemaB einer der Berecbmmgswege mrr diese Daten verwendet werden, im 
Zwischenbereich eine Mittelwertbildung stattfindeL Auch kann entsprechend ein 

3 5 resultierendes GutemaB ermittelt werden. 
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Die auf diese Weise ermittelten Spurdaten werden der nachfolgenden Auswerteeinheit 
zur Verfugung gestellt, die dann auf der Basis dieser Spurdaten beispielsweise den Fahrer 
bei drohendem Verlassen der Fahrspur warnt. 

In den Figuren 3 bis 5 ist ein weiteres Ausffihrungsbeispiel der vorgeschlagenen 
Vorgehensweise als Fhissdiagramme dargestellt. Die Flussdiagramme reprasentieren 
dabei Programme oder Programmteile von Programmen fur den Mikrocomputer, der in 
der Auswerteeinheit 10 angeordnet ist 



In Figur 3 ist ein Beispiel dargestellt, welches eine Auswertung der ermittelten Spurdaten 
am Beispiel eines Systems zur Warnung vor Verlassen der Fahrspur darstellt. Zunachst 
werden im Schritt 300 die gemessen und/oder geschatzten oder aus einer Fusion der 
beiden abgeleiteten Spurdaten bzw. die Abschaltinformation (siehe unten) eingelesen. Im 

1 5 Schritt 301 wird iibeipruft, ob eine Abschaltinformation vorliegt. In diesem Fall wird das 

Programm beendet und zum nachsten Zeitpunkt erneut durchlaufen. Im anderen Fall wird 
im Schritt 302 aufgrund von Fahizeuggrdfien wie Lenkwinkel, Gierrate, 
Querbeschleunigung, Fahrzeuggeometriedaten, etc. die Ist-Trajektorien des Fahrzeugs 
und daraus der zukunftige Kurs des Fahrzeugs (linke und/oder rechte Fahrzeugseite) als 

2 0 mathematische Funktion (unter der Annahme dass das Fahrzeug den aktueDen Kurs, ggf. 

unter Berucksichtung iiblicher Fahrerreaktionen beibehalt) berechnet. Daraufhin wird im 
Schritt 304 durch Vergleich der ermittelten Spurdaten sowie mit dem zukiinftigen Kurs 
des Fahrzeugs (auf einer oder auf beiden Fahrspurseiten) ein drohendes Verlassen der 
Fahrspur abgeleitet (Schnittpunkte der mathematischen Funktionen in der Zukunft). Ist 

2 5 dies der Fall, so wird gemaB Schritt 306 der Fahrer akustisch und/oder optisch und/oder 

haptisch gewarnt, gegebenenfalls in einem Ausfuhrungsbeispiel durch Lenkeingriff das 
Fahrzeug in der Spur gehal ten. Ergibt der Vergleich, dass kein Verlassen der Fahrspur zu 
befurchten ist, unterbleibt die Warnung bzw. die geschilderte Aktion. 

3 0 Figur 4 zeigt eine Vorgehensweise zur Spurdatenermittlung auf der Basis zur Verfugung 

stehender geschatzter Spurdaten. Zunachst wird im Schritt 400 aus dem vom Videosensor 
200 erfassten Bild mit Methoden der Bildanalyse, z,B. anhand der Bildkontraste und 
Vergleich mit gespeicherten Modellen, eine Erkemrcmg der Fahrspurrandmariderungen 
durchgefuhrt. Ferner wird im Schritt 402 aus dem Kontrast des Bildes, insbesondere aus 
3 5 dem Kontrast im Bereich der Fahrspurrandmarkierung, und/oder der Varianz der Mess- 
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und der Schatzwerte ein GutemaB gebildet Im bevorzugten Ausfuhrungsbeispiel ist dies 
ein Wert zwischen 0 und 1, wobei das GutemaB umso hoher ist, je hoher der Kontrast des 
Bildes bzw. je kleiner die Varianz ist Im darauf f olgenden Schritt 404 wird dann auf der 
Basis der erkannten Fahrspurrandmarkierungen die Spurdaten berechnet, insbesondere 
ein Polynom zweiter Qrdnung gebildet und die Spurparameter Krummung und 
Knimmungsanderung sowie Abstand nach links und rechts zum eigenen Fahrzeug 
errechnet, so dass Spurdaten fur den linken und fur den rechten Rand vorliegen. Im 
Schritt 406 werden die Spurdaten aus der Spurdatenschatzung (die ebenfalls fur rechts 







71 





1 0 erfolgt dann die Fusion dieser Spurdaten fur jede Seite einzeln zur Bildung der 

resultierenden Spurdaten. Dies erfolgt unter Benicksichtigung der ermittelten GiitemaBe. 
So wird beispielsweise bei einem hohen GutemaB (beispielsweise > 0,75) bei der 
Erfassung der Fahrspurrandmarkierungen auf die Benicksichtigung der 
Spurdatenschatzung vollstandig verzichtet. Ebenso kann es Ausfuhmngsbeispiele geben, 

15 in der im umgekehrten Fall bei einem hohen GutemaB der Spurdatenschatzung und einem 

geringen GutemaB der Fahrspurrandmarkierungserkennung (< beispielsweise 0,3) auf die 
Spurdaten aus der Schatzung herangezogen werden. In anderen Fallen erfolgt die Fusion 
beispielsweise im Rahmen einer gewichteten Mittelwertbildung aus den zur Verfugung 
stehenden Spurdaten, wobei die Wichtung auf der Basis der GiitemaBe erfolgt Ebenso 

2 0 wie bei den Spurdaten werden aus den GiitemaBe ein resultierendes GutemaB ermittelt. 

Im Schritt 410 wird uberprftft, ob dieses eine bestimmte GroBe erreicht hat, 
beispielsweise 0,5. Ist dies nicht der Fall, wird anstelle der Spurdaten eine 
Abschaltinformation im Schritt 412 an die nachfolgenden Systeme geschickt, derart, dass 
keine verl ass lichen Spurdaten ermittelt werden konnen. Im anderen Fall werden die 

2 5 resultierenden Spurdaten an die nachfplgende Anwendung weitergegeben (Schritt 414). 

In Figur 5 ist ein Flussdiagramm dargestellt, welches ein Ausfuhrungsbeispiel zur 
Ermittlung der geschatzten Spurdaten skizziert Auch hier wird im ersten Schritt 500 das 
vom Videosensor ermittelte Bild analysiert Dabei werden verschiedene Objekte im Bild 

3 0 erkannt, beispielsweise vorausfahrende Fahrzeuge, entgegenkommende Fahrzeuge, 

stehende Objekte wie z.B. Leitplanken, die den Fahrbahnrand kennzeichnen, sowie nicht 
bewegte Objekte auBerhalb der Fahrbahn, beispielsweise Baume, etc. Die Analyse des 
Bildes und die Objekteikennung sowie Klassifizierung der Objekte erfolgt dabei nach 
MaBgabe eines entsprechenden Bildanalyseverfahrens z.B. auf der Basis der im Bild 
3 5 vorhandenen Kontraste und von Konturenvergjeichen. Im darauf folgenden Schritt 502 
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werden aus den Kontrasten der Bildausschnitte, in denen die ermittelten Objekte liegen, 
und/oder aus der Vaiianz der entsprechenden Mess- und der Schatzwerte jeweils 
GutemaBe fur die Objekterkennung ermittelt Jedes erkannte Objekt ist dabei mit einem 
entsprechenden GutemaB (z.B. einem Wert zwischen 0 und 1) versehen. 

Im darauf folgenden Schritt 504 werden aus den Objekten Spurdaten abgeleitet. Dies 
erfolgt bei vorausfahrenden oder entgegenkommenden Fahrzeugen durch Analyse 
aufeinander folgender Bilder, aus denen die Bewegung der Fahrzeuge, die Richtung und 
deren Trajektorien in der Vergangenheit ermittelt werden. Die auf diese Weise ermittelten 
Trajektorien werden dann zur Beslimmung eines Fahrbahnverlaufs herangezogen. 
Insbesondere geeignet hierfur ist der Gegenverkehr, dessen Trajektorie in der 
Vergangenheit die vom Fahrzeug zu befahrene Fahrspur reprasentiert. Unter 
Berucksichtigung des lateral en Abstands zwischen den vorausfahrenden und den 
entgegenkommenden Fahrzeugen wird der Verlauf der eigenen Fahrspur ermittelt. Daraus 
werden wiederum die oben genannten Spurdaten aus der Trajektorie und einer 
angenommen oder bestimmten Fahrspurbreite ermittelt. 

Bei Regen oder schlechter Sicht oder auch bei Schnee lasst sich aus dem aufgenommen 
Bild die dann sichtbare Spur des voranfahrenden Fahrzeuges auswerten. Aus der 
Bildanalyse lassen sich Trajektorien berechnen, die unter Berucksichtigung einer 
angenommenen Spurbreite in etwa dem Verlauf der Fahrbahnran dm arki erungen 
entsprechen. Die Spurdaten werden auch hier aus den im Bild erkannten Objekten als 
mathematische Funktion dargestellt 

2 5 Als weitere Moglichkeit lassen sich nicht bewegte Objekte zur Schatzung von Spurdaten 

auswerten, insbesondere Leitplanken oder andere Begrenzungen, die die Fahrbahn 
zumindest auf einer Seite begrenzen. Der Verlauf dieser Begrenzungen lasst sich im Bild 
analysieren und daraus eine Trajektorie berechnen. Unter Berucksichtigung von ublichen 
Seitenabstanden und Fahrbahnbreiten lassen sich dann Spurdaten (rechts und links) 

3 0 ermitteln. 

Wie oben erwahnt wird jedem ermittelten Objekt ein Gutemafl zugeordnet, welches 
entsprechend den auf der Basis dieses Objekts ermittelten Spurdaten beigegeben wird 
Ferner konnen nicht bewegte Objekte, die vom Videosensor klassifiziert werden und 
3 5 nicht befahrbare Flachen markieren, zur PlausibihtatsubeipriLfung der geschatzten Spur 



10 



15 



20 



WO 2005/039957 



PCT/EP2004/052124 



- 11 - 



dienen. Wird erkannt, dass die geschatzte Spur im Bereich solcher nicht bewegter 

« 

Objekte sich befindet, ist von einer fehlerhaften Spurschatzung auszugehen. 

Die ermittelten Spurdaten sowie das resultierende GutemaB werden dann zur weiteren 
5 Auswertung abgegeben (vgl. Figur 4). 

In einer bevorzugten Ausfuhrungsform wild die Spurschatzung nur bei erkannten 
schlechten Witterungsbedingungen durchgefuhrt, wahrend bei guten 
Witterungsbedingungen und guter Sicht auf die Schatzung vexzichtet wird. Schlechte 
0 Witterungsbedingungen werden dabei erkannt, wenn der Scheibenwischer iiber ein 

bestimmtes Mafl hinaus aktiv ist und/oder wenn ein Regensensor Regen erkennt, 
und/oder wenn der Videosensor eine geringe Sichtweite ermittelt 

Ferner ist in einem Ausfuhrungsbeispiel vorgesehen, die Gute der Spurschatzung zu 
5 venringern, wenn ein Abbiege- oder Spurwechselvorgang des vorherfahrenden 

Fahrzeuges erkannt wird. 
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1 0 Patentanspruche 

1 . Fahrerassi stenzverfahren auf der Basis von Fahrspurinformation, wobei abhangig von 
der Fahrspurinformation erne Fahrerinformation und/oder eine Aktion ausgelost wird, 
dadurch gekennzeichnet, dass die Fahrspurinformation aus wenigstens zwei, die 
1 5 Fahrspur kennzeichnenden Inform ationen abgeleitet wird 



2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Fahrspurinformation 
anhand der Fahrspurrandmarkierungen mittels eines Bildes einer Kamera ermittelt 
wird 

3. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, dass 
die Fahrspurinformation auf der Basis von im Bild einer Kamera erkannten Objekten 
erfolgt. 

25 4. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, dass 

die Fahrspurinformation auf der Basis entgegenkommender Fahrzeuge und/oder auf 
der Basis vorausfahrender Fahrzeuge und/oder auf der Basis nicht bewegter Objekte, 
die den Fahrbahnrand markieren, ermittelt wird. 



30 5 



Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, dass 
die Fahrspurinformation auf der Basis der Spuren des voranfahrenden Fahrzeugs Oder 
der voranfahrenden Fahrzeuge ermittelt wird 
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6. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, dass 
jede Information, aus der die Fahrspurinformation abgeleitet wird, mit einem 
GutemaB versehen ist 

7. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, dass 
bei der Ermittlung der Fahrspurinformation die jeweiligen Gutemafie berucksichtigt 
wen* 



8. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, dass 
1 0 das GutemaB aus dem Kontrast des Bildes abgeleitet wird und/oder aus einem 

Vergleich der Schatzung mit der Messung, wobei insbesondere die Abweichung der 
Messpunkte von der Schatzlinie (Varianz) herangezogen werden. 

9. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, dass 
15 die Fahrspurinformation sowie das GutemaB an nachfolgende Auswerteeinheiten 

abgegeben werden. 

10. Fahrerassistenzvorrichtung auf der Basis von Fahrspurinformationen, mit einer 
Auswerteeinheit, welche auf der Basis eines ermittelten Bildes eine 

2 0 Fahrspurinformationen ermittelt, dadurch gekennzeichnet, dass die Auswerteeinheit 

die Fahrspurinformation aus wenigstens zwei, die Fahrspur kennzeichnenden 
Informationen ableitet 

1 1 . Fahrerassistenzvorrichtung auf der Basis von Fahrspurinformationen, mit einer 
2 5 Auswerteeinheit, welche auf der Basis eines ermittelten Bildes eine 

Fahrspurinformationen ermittelt, dadurch gekennzeichnet, dass die Auswerteeinheit 
ein GutemaB fur die Fahrspurinformation ermittelt 
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